Không rõ năm Cao Anh trở thành phi tần của Tuyên Vũ Đế, chỉ biết bà được sơ phong Quý tần (貴嬪). Vu hoàng hậu, hoàng hậu đầu tiên của Tuyên Vũ Đế bị thất sủng bởi Cao quý tần. Chú bà Cao Triệu (高肇) trở thành đại thần có quyền lực cao trong triều.

Vào mùa đông năm 507, Vu hậu đột ngột qua đời. Đầu năm 508, con trai của Vu hậu là Nguyên Xương (元昌) cũng đột tử. Nguyên Xương cũng là con trai duy nhất của Tuyên Vũ Đế vào thời điểm đó. Bấy giờ thế lực của Cao Triệu đang rất hùng mạnh, cháu gái ông là Cao quý tần lại rất được Tuyên Vũ Đế sủng ái, nên có nghi án Cao Triệu và Cao quý tần đã ám hại mẫu tại Hoàng hậu, tuy nhiên không có bằng chứng để kết luận.

Năm 508, Tuyên Vũ Đế lập Cao quý tần làm Kế hậu. Cao hoàng hậu là người cực kỳ ghen tuông với các phi tần được hoàng đế sủng hạnh. Bà hạ sinh một bé trai chết yểu và một con gái là Kiến Đức công chúa (建德公主).

Năm 510, Hồ sung hoa hạ sinh một bé trai, đặt tên Nguyên Hủ (元詡). Do nhiều hoàng tử của Tuyên Vũ Đế đều mất khi còn nhỏ, ông đã cẩn thận lựa chọn một số bà mẹ có kinh nghiệm để làm nhũ mẫu cho Nguyên Hủ. Đến mùa đông năm 512, Tuyên Vũ Đế lập Nguyên Hủ làm Hoàng thái tử, bãi bỏ phong tục của hoàng tộc Bắc Ngụy là ép mẹ đẻ của Thái tử tự sát, vì thế Hồ thị may mắn không chết.